岗位职责:
工作内容:
1.负责爬虫系统的架构设计,功能开发,日常维护和反爬处理;
2.电商数据爬取,研发高效、多线程爬虫;
3.构建爬虫任务管理后台,能实现简单的数据展示。
职位要求
1.有激情、毅力,正能量;
2.有良好沟通技术和团队合作精神;
3.精通 python, js、html、css;
4.精通网页抓取原理和相关技术,精通正则表达式, xpath,css selector 的使用;
5.熟悉 Mysql,Sqlserver 主流数据库管理系统;
6.有爬虫集群实施经验者优先。
职能类别:
算法工程师
数据库工程师/管理员
关键字:
大数据